894. Орлов А.И. Новый подход к изучению устойчивости выводов в математических моделях / А.И. Орлов // Политематический сетевой электронный научный журнал Кубанского государственного аграрного университета (Научный журнал КубГАУ) [Электронный ресурс]. – Краснодар: КубГАУ, 2014. – №06(100). С. 1 – 30. – IDA [article ID]: 1001406001. – Режим доступа: http://ej.kubagro.ru/2014/06/pdf/01.pdf, 1,875 у.п.л., импакт-фактор РИНЦ=0,346 	
		
УДК 519.2:303.732.4	UDC 519.2:303.732.4	
		
НОВЫЙ ПОДХОД К ИЗУЧЕНИЮ УСТОЙЧИВОСТИ ВЫВОДОВ В МАТЕМАТИЧЕСКИХ МОДЕЛЯХ	A NEW APPROACH TO THE STUDY OF THE STABILITY OF CONCLUSIONS IN THE MATHEMATICAL MODELS	
		
Орлов Александр Иванович
д.э.н., д.т.н., к.ф.-м.н., профессор	Orlov Alexander Ivanovich
Dr.Sci.Econ., Dr.Sci.Tech., Cand.Phys-Math.Sci., professor	
Московский государственный технический университет им. Н.Э. Баумана, Россия, 105005, Москва, 2-я Бауманская ул., 5, prof-orlov@mail.ru 	Bauman Moscow State Technical University, Moscow, Russia 	
		
Предложена общая схема изучения устойчивости выводов, полученных с помощью математических методов и моделей, относительно допустимых отклонений исходных данных и предпосылок моделей. Рассмотрены конкретные постановки задач устойчивости: по отношению к изменению данных, их объема и распределений, к допустимым преобразованиям шкал измерения, к временным характеристикам (моменту начала реализации проекта, горизонту планирования). Уменьшение неопределенности может проводиться путем изменения вида данных, т.е. путем перехода к нечисловым данным. Обсуждаются модели конкретных процессов управления промышленными предприятиями на примерах устойчивости характеристик инвестиционных проектов к изменению коэффициентов дисконтирования и устойчивости к изменению коэффициентов модели и объемов партий продукции в моделях управления запасами	We have proposed the general scheme for studying the stability of the conclusions obtained by mathematical methods and models regarding tolerance deviations of the original data and background models. The concrete problems of stability are discussed: towards a change of data, its size and distributions, to allowable transformations measurement scales, to the temporal characteristics (time of start of the project, the planning horizon). Reducing the uncertainty can be conducted by changing the type of data, i.e. with the aid of the transition to non-numerical data. 
          The models of concrete management processes of industrial organizations are considered on the examples of stability characteristics of investment projects to change the discount factors and in models of inventory management to change in the coefficients of the model and batch size production

Ключевые слова: МАТЕМАТИЧЕСКИЕ МОДЕЛИ, УСТОЙЧИВОСТЬ, ПРИНЯТИЕ РЕШЕНИЙ, ПРИКЛАДНАЯ СТАТИСТИКА, АНАЛИЗ ДАННЫХ, ТЕОРИЯ ИЗМЕРЕНИЙ, ГОРИЗОНТ ПЛАНИРОВАНИЯ, НЕЧИСЛОВЫЕ ДАННЫЕ, ИНВЕСТИЦИОННЫЕ ПРОЕКТЫ, УПРАВЛЕНИЕ ЗАПАСАМИ	Keywords: MATHEMATICAL MODELS, STABILITY, DECISION MAKING, APPLIED STATISTICS, DATA ANALYSIS, MEASUREMENT THEORY, PLANNING HORIZON, NON-NUMERICAL DATA, INVESTORY PROJECTS, INVENTORY MANAGEMENT	

1. Введение
	Математические модели дают лишь приближенное представление о реальных явлениях и процессах. Исходные данные известны лишь с некоторой точностью, математические зависимости всегда несколько отличаются от реальных. Поэтому изучение устойчивости выводов относительно допустимых отклонений исходных данных и предпосылок модели – один из этапов построения математической модели (см. [1, с.288-303], [2] и др.). Представим новый подход к изучению устойчивости выводов в математических моделях, используя примеры в основном из области математического моделирования процессов управления промышленными предприятиями. Рассмотрим общую схему устойчивости, выделим классы устойчивых моделей, приведем решения ряда конкретных задач.
	Процессы управления промышленными предприятиями реализуются в реальных ситуациях с достаточно высоким уровнем неопределенности [3, 4]. Велика роль нечисловой информации, как на «входе», так и на «выходе» процесса принятия управленческого решения. Неопределенность и нечисловая природа управленческой информации должны быть отражены при анализе устойчивости экономико-математических методов и моделей.

2. Основные понятия и базовые положения нового подхода
	Применение экономико-математических методов и моделей при разработке инструментария повышения эффективности управления промышленными предприятиями обычно предполагает последовательное осуществление трех этапов исследования. Первый - от исходной практической проблемы до теоретической чисто математической задачи. Второй – внутриматематическое изучение и решение этой задачи. Третий – переход от математических выводов обратно к практической проблеме. 
	Целесообразно выделять четверки проблем:
ЗАДАЧА – МОДЕЛЬ - МЕТОД - УСЛОВИЯ ПРИМЕНИМОСТИ.
Обсудим каждую из только что выделенных составляющих.
	Задача, как правило, порождена потребностями той или иной прикладной области. Разрабатывается одна из возможных математических формализаций реальной ситуации. Например, при изучении предпочтений потребителей возникает вопрос: различаются ли мнения двух групп потребителей. При математической формализации мнения потребителей в каждой группе обычно моделируются как независимые случайные выборки, т.е. как совокупности независимых одинаково распределенных случайных величин, а вопрос маркетологов переформулируется в рамках этой модели как вопрос о проверке той или иной статистической гипотезы однородности. Речь может идти об однородности характеристик, например, о проверке равенства математических ожиданий, или о полной (абсолютной однородности), т.е. о совпадении функций распределения, соответствующих двух совокупностям.
	Модель может быть порождена также обобщением потребностей (задач) ряда прикладных областей. Приведенный выше пример иллюстрирует эту ситуацию: к необходимости проверки гипотезы однородности приходят и медики при сравнении двух групп пациентов, и инженеры при сопоставлении результатов обработки деталей двумя способами, и т.д. Таким образом, одна и та же математическая модель может применяться для решения самых разных по своей прикладной сущности задач. Важно подчеркнуть, что выделение перечня задач находится вне математики.
	Метод, используемый в рамках определенной математической модели - это уже во многом, если не в основном, дело математиков. В вероятностно-статистических моделях речь идет, например, о методе оценивания, о методе проверки гипотезы, о методе доказательства той или иной теоремы, и т.д. В первых двух случаях алгоритмы разрабатываются и исследуются математиками, но используются прикладниками, в то время как метод доказательства касается лишь самих математиков.
	Отнюдь не все модели и методы непосредственно связаны с математикой. В организационно-экономических исследованиях широко используются графические модели описания спроса и предложения, равновесных цен. Предпочтения потребителей могут быть выявлены различными методами – выборочным опросом потребителей, путем наблюдения за их поведением, с помощью различных экспертных процедур. Ясно, что для решения той или иной задачи в рамках одной и той же принятой исследователем модели может быть предложено много методов. 
	Наконец, рассмотрим последний элемент четверки - условия применимости. При использовании математической модели он - полностью внутриматематический. С точки зрения математика замена условия (кусочной) дифференцируемости некоторой функции на условие ее непрерывности может представляться существенным научным достижением, в то время как экономист или менеджер оценить это достижение не смогут. Для них, как и во времена Ньютона и Лейбница, непрерывные функции мало отличаются от (кусочно) дифференцируемых. Точнее, они одинаково хорошо (или одинаково плохо) могут быть использованы для описания и решения реальных проблем. 
	Взаимоотношения моделей и методов заслуживают обсуждения. В процессе познания не всегда метод следует за математической моделью. Метод может быть разработан на основе эвристических соображений, словесной модели. Свойства метода можно изучать лишь в рамках той или иной модели. В рамках одной математической модели метод может быть оптимальным, в рамках другой – несостоятельным. Проблема состоит в создании или выборе модели, адекватной изучаемому явлению или процессу. 
	С точки зрения практической деятельности модели и методы нужны не сами по себе, а как инструменты разработки управленческих решений, которые могут описываться как выводы, заключения, планы мероприятий. Рассмотрим цепочку:
ДАННЫЕ – МЕТОД (их обработки) – ВЫВОДЫ.
Как обосновать адекватность выводов? Один из критериев – устойчивость метода обработки данных. Устойчивость можно изучать лишь в рамках определенной модели. 
	Для обоснованного практического применения математических моделей процессов управления промышленными предприятиями и основанных на них экономико-математических методов должна быть изучена устойчивость получаемых с их помощью выводов по отношению к допустимым отклонениям исходных данных и предпосылок моделей. Возможные применения результатов подобного исследования:
	заказчик научно-исследовательской работы получает представление о точности предлагаемого решения;
	удается выбрать из многих моделей наиболее адекватную;
	по известной точности определения отдельных параметров модели удается указать необходимую точность нахождения остальных параметров;
	переход к случаю «общего положения» позволяет получать более сильные с математической точки зрения результаты.
	Можно рекомендовать обрабатывать данные несколькими способами (методами). Выводы, общие для всех способов, скорее всего отражают реальность (являются объективными). Выводы, меняющиеся от метода к методу, субъективны, зависят от исследователя, выбравшего тот или иной метод анализа данных. Здесь речь идет об устойчивости выводов по отношению к выбору метода. 

3. Общая схема устойчивости 
	Проблемы устойчивости обсуждались многими авторами и с разных точек зрения. Так, случай «общего положения» соответствует переходу к «мягкой модели» в терминологии [5]. В настоящей статье рассматривается только система научных результатов, к которым автор имеет отношение, следовательно, она не претендует на обзор различных постановок задач изучения устойчивости.
	Необходим математический аппарат для описания проблем устойчивости выводов, получаемых на основе математических моделей социально-экономических явлений и процессов. Предлагаем использовать следующие базовые понятия [6].
	Определение 1. Общей схемой устойчивости называется кортеж {A, B, f, d, E}, где: 
A – множество, интерпретируемое как пространство исходных данных; 
B – множество, называемое пространством решений;
f – способ получения выводов, т.е. однозначное отображение ;
d – показатель устойчивости, т.е. неотрицательная функция, определенная на подмножествах У множества B и такая, что из  вытекает ;
	 – совокупность допустимых отклонений, т.е. система подмножеств множества A такая, что каждому элементу множества исходных данных  и каждому значению параметра  из некоторого множества параметров  соответствует подмножество ) множества исходных данных. Оно называется множеством допустимых отклонений в точке х при значении параметра, равном . 
	Способ получения выводов иногда будем для краткости называть моделью. Во многих конкретных постановках устойчивости выводы получают с помощью определенного метода, основанного на некоторой модели. С прикладной точки зрения модель первична, метод – вторичен, поскольку результаты его применения определяются свойствами модели. Это соображение оправдывает принятую нами в [6] терминологию общей схемы устойчивости. 
	Часто показатель устойчивости d(Y) определяется с помощью метрики, псевдометрики или показателя различия (меры близости)  как диаметр множества У, т.е.  Т.е. в пространстве решений с помощью показателя устойчивости вокруг образа исходных данных сформирована система окрестностей. В пространстве исходных данных подобная система – это Е, т.е. совокупность допустимых отклонений,  - окрестность радиуса  вокруг точки х.
	Определение 2. Показателем устойчивости в точке х при значении параметра, равном , называется число 

- диаметр образа множества допустимых отклонений при отображении, рассматриваемом в качестве модели (способа получения выводов).
	Определение 3. Абсолютным показателем устойчивости в точке х называется число 
.
	Рассмотрим два конкретных типа математических моделей. В теории измерений [6] окрестностью исходных данных являются все те вектора, что получаются из исходного путем преобразования координат с помощью допустимого преобразования шкалы, которое берется из соответствующей группы допустимых преобразований. В статистике интервальных данных [7, 8] под окрестностью исходных данных естественно понимать – при описании выборки – куб с ребрами  и центром в исходном векторе. В обоих случаях максимальное сужение не означает сужение к точке.
	Определение 4. Абсолютным показателем устойчивости на пространстве исходных данных А по мере  называется число
.
	Определение 5. Максимальным абсолютным показателем устойчивости называется
.
	Определение 6. Модель f называется абсолютно –устойчивой, если , где  – максимальный абсолютный показатель устойчивости.
	Пример. Если показатель устойчивости формируется с помощью метрики , совокупность допустимых отклонений E – это совокупность всех окрестностей всех точек пространства исходных данных A, то 0–устойчивость модели f эквивалентна непрерывности модели f на множестве A.
	Типовая проблема в общей схеме устойчивости – проверка –устойчивости данной модели f относительно данной системы допустимых отклонений E.
	Проблема А (характеризации устойчивых моделей). Даны пространство исходных данных A, пространство решений B, показатель устойчивости d, совокупность допустимых отклонений E и неотрицательное число . Описать достаточно широкий класс  – устойчивых моделей f. Или: найти все –устойчивые модели среди моделей, обладающих данными свойствами, т.е. входящих в данное множество моделей. 
	Проблема Б (характеризации систем допустимых отклонений). Даны пространство исходных данных A, пространство решений B, показатель устойчивости d, модель f и неотрицательное число . Описать достаточно широкий класс систем допустимых отклонений E, относительно которых модель f является —устойчивой. Или: найти все такие системы допустимых отклонений E среди совокупностей допустимых отклонений, обладающих данными свойствами, т.е. входящих в данное множество совокупностей допустимых отклонений.
	Пример. Определение устойчивости по Ляпунову решения  нормальной автономной системы дифференциальных уравнений  с начальными условиями  выразим в терминах общей схемы устойчивости.
	Здесь пространство исходных данных A – конечномерное евклидово пространство, множество допустимых отклонений  - окрестность радиуса  точки , пространство решений B – множество функций на луче  с метрикой 
.
Модель f – отображение, переводящее начальные условия х в решение системы дифференциальных уравнений с этими начальными условиями . 
	В терминах общей схемы устойчивости положение равновесия а называется устойчивым по Ляпунову, если . 
	Для формулировки определения асимптотической устойчивости по Ляпунову надо ввести в пространстве решений B псевдометрику 
.
Положение равновесия а называется асимптотически устойчивым, если  для некоторого , где показатель устойчивости  рассчитан с использованием псевдометрики .
	Таким образом, общая схема устойчивости является обобщением классических постановок задач устойчивости по Ляпунову в теории дифференциальных уравнений. Соотношение общей схемы устойчивости с подходами других авторов обсуждается в [4, гл.8], [6, гл.1] и др. Отметим только структурную устойчивость (грубость динамических систем), введенную А. А. Андроновым и Л. С. Понтрягиным в 1937 г., работы Д.А. Молодцова по устойчивости принципов оптимальности [9] и теории мягких множеств [10].
	Непосредственно из общей схемы устойчивости вытекает ряд практически полезных рекомендаций [6, гл.1], в частности, принцип уравнивания погрешностей, согласно которому целесообразно уравнять вклад погрешностей различной природы в общую погрешность. Принцип уравнивания погрешностей позволяет установить:
	- рациональный объем выборки в статистике интервальных данных [7, 8];
	- число градаций в анкетах, предназначенных для опроса потребителей [6];
	- необходимую точность оценивания параметров (платы за доставку и платы за дефицит) в моделях управления запасами [11].
	Перечислим ряд конкретных постановок проблем устойчивости в математических методах и моделях, в частности, используемых при управлении деятельностью промышленных предприятий и организаций других отраслей народного хозяйства.

	4. Устойчивость по отношению к изменению данных
	Исходные данные могут быть известны лишь с некоторыми неопределенностями (погрешностями, ошибками, невязками), присущими результатам измерений (наблюдений, испытаний, анализов, опытов). Для учета влияния неопределенностей на свойства процедур анализа данных используют модель сгруппированных данных [12, 13], статистику интервальных ([7, гл.12], [8], [14, гл.4]) и нечетких [15, 16] данных.

	5. Устойчивость к изменению объема данных (объема выборки)
	Асимптотические методы математической статистики нацелены на получение выводов, не меняющихся при изменении объемов данных, лишь бы эти объемы были достаточно велики. Отметим, что выводы, устойчивые к изменению объема выборки, т.е. полученные в результате предельного перехода, зачастую являются более общими, чем те, которые можно получить при рассмотрении конкретного объема выборки. Так, согласно Центральной предельной теореме теории вероятностей распределение центрированного и нормированного среднего арифметического независимых одинаково распределенных случайных величин приближается к вполне определенному распределению (нормальному распределению с математическим ожиданием 0 и дисперсией 1), каким бы ни было распределение слагаемых (в предположении, что дисперсия этого распределения конечна и отлична от 0). Как писали Б.В. Гнеденко и А.Н. Колмогоров, «познавательная ценность теории вероятностей раскрывается только предельными теоремами» [17]. В этом полемически заостренном утверждении подчеркивается принципиальная важность получения выводов, устойчивых к изменению объема выборки. Решения ряда задач асимптотической статистики рассмотрены в [6, 7].

	6. Устойчивость к изменению распределений данных 
	До сих пор в книгах и статьях часто рассматривают различные параметрические семейства распределений числовых случайных величин. А именно – изучают семейства нормальных распределений, логарифмически нормальных, экспоненциальных, гамма-распределений, распределений Вейбулла – Гнеденко и др. Все они зависят от одного, двух или трех параметров. Поэтому для полного описания распределения достаточно знать или оценить одно, два или три числа. Широко развита и представлена в литературе параметрическая теория математической статистики, в которой предполагается, что распределения результатов наблюдений принадлежат тем или иным параметрическим семействам.
	К сожалению, параметрические семейства существуют лишь в моделях, созданных исследователями. Анализ конкретных данных показывает, что погрешности наблюдений (измерений, испытаний, анализов, опытов) в большинстве случаев имеют распределения, отличные от нормальных и от распределений из других параметрических семейств. Так, в научной школе метролога проф. П. В. Новицкого проведены исследования законов распределения различного рода погрешностей измерения. Изучены распределения погрешностей электромеханических приборов на кернах, электронных приборов для измерения температур и усилий, цифровых приборов с ручным уравновешиванием. Объем выборок экспериментальных данных для каждого экземпляра составлял 100–400 отсчетов. Оказалось, что 46 из 47 распределений значимо отличались от нормального. Исследована форма распределения погрешностей у 25 экземпляров цифровых вольтметров Щ-1411 в 10 точках диапазона. Результаты аналогичны. Дальнейшие сведения содержатся в [18]. В лаборатории прикладной математики Тартуского государственного университета проанализировано 2500 выборок из архива реальных статистических данных. В 92% случаев гипотезу нормальности пришлось отвергнуть [19]. 
	Анализ, проведенный в [7, 19], показал, что распределения реальных данных почти всегда отличаются от тех, которые включены в параметрические семейства. Отличия могут быть большими или меньшими, но они всегда есть. Каково влияние этих отличий на свойства процедур анализа данных? Иногда оно исчезает при росте объемов данных, как для доверительного оценивания математического ожидания, иногда является заметным (как при оценивании высших моментов), иногда делает процедуру полностью необоснованной (как для отбраковки выбросов) [7]. Следовательно, надо либо использовать непараметрические процедуры (в которых на функции распределения наложены лишь внутриматематические условия регулярности, например, условие непрерывности), в частности, при решении задач прогнозирования [20], либо изучать устойчивость основанных на параметрических моделях процедур по отношению к отклонениям распределений результатов наблюдений от предпосылок модели. Как говорят, изучать робастность статистических процедур (от robust (англ.) – крепкий, грубый) с использованием моделей и методов, приведенных в [6, 21 – 25] и др. Статистику интервальных данных ([7, гл.12], [8], [14, гл.4]) также можно отнести к робастной статистике.

	7. Устойчивость по отношению к допустимым преобразованиям шкал измерения
	Борьба с неопределенностью может проводиться путем изменения вида данных, т.е. путем перехода к нечисловым данным, например, к более слабым шкалам измерения.
	Примером нечисловых данных являются результаты измерений в шкалах, отличных от абсолютной. Теория измерений [26] – один из разделов нечисловой статистики [14, 27, 28]. Типы основных шкал измерения, их определения, примеры величин, измеренных в этих шкалах, группы допустимых преобразований приведены в табл.1.
	Основное требование к статистическим алгоритмам: выводы, сделанные на основе данных, измеренных в шкале определенного типа, не должны меняться при допустимом преобразовании шкалы измерения этих данных. В частности, выводы могут быть адекватны реальности только тогда, когда они не зависят от того, какую единицу измерения предпочтет исследователь.
	Это требование позволяет, например, указать вид допустимой средней величины в зависимости от шкалы, в которой измерены данные (табл.2). Определим термины. 

Таблица 1. Основные шкалы измерения
Тип шкалы	Определение шкалы	Примеры	Группа допустимых преобразований 	
Шкалы качественных признаков	
Наименований 	Числа используют для различения объектов	Номера телефонов, паспортов, пол, ИНН, штрих-коды, УДК	Все взаимно-однозначные преобразования	
Порядковая	Числа используют для упорядочения объектов	Оценки экспертов, баллы ветров, отметки в школе, полезность, номера домов	Все строго возрастающие преобразования	
Шкалы количественных признаков
(описываются началом отсчета и единицей измерения)	
Интервалов	Начало отсчета и единица измерения произвольны	Потенциальная энергия, положение точки, температура по шкалам Цельсия и Фаренгейта	Все линейные преобразования φ(x) = ax + b,
a и b произвольны, а>0	
Отношений	Начало отсчета задано, единица измерения произвольна	Масса, длина, мощ-ность, напряжение, сопротивление, темпе-ратура по Кельвину, цены	Все подобные преобразования φ(x) = ax, 
а произвольно, а>0	
Разностей	Начало произ-вольно, единица измерения задана 	Время**	Все преобразования сдвига φ(x) = x + b,
b произвольно	
Абсолютная	Начало отсчета и единица измерения заданы	Число людей в данном помещении	Только тождественное преобразование φ(x) = x	

	Общее понятие средней величины введено Огюстеном Луи Коши: средней величиной (средним по Коши) является любая функция f(X1, X2,...,Xn) такая, что при всех возможных значениях аргументов значение этой функции не меньше, чем минимальное из чисел X1, X2,...,Xn, и не больше, чем максимальное из этих чисел. 
	Для чисел X1, X2,...,Xn  средним по Колмогорову является 
G{(F(X1) + F(X2) +...+ F(Xn))/n},
где F - строго монотонная функция (т.е. строго возрастающая или строго убывающая), G - функция, обратная к F. 
	Конкретизацией основного требования к алгоритмам анализа данных является условие устойчивости результата сравнения средних (УУРСС): неравенства 
f(Y1, Y2,...,Yn) <  f(Z1, Z2,...,Zn).
f((Y1), (Y2),..., (Yn)) < f((Z1), (Z2),..., (Zn)),
должны быть равносильны для любых чисел Y1, Y2,...,Yn, Z1, Z2,...,Zn и любого допустимого преобразования  из группы допустимых преобразований , задающей шкалу.
	На основе математической теории, развитой в [6, 26, 30], получен цикл теорем, кратко описанный в табл.2. Правила выбора алгоритмов анализа данных в зависимости от шкал, в которых эти данные измерены, заслуживают дальнейшего изучения.

Таблица 2. Выбор средних в зависимости от шкалы измерения
Тип шкалы	Вид средних	Средние, удовлетворяющие УУРСС	
Порядковая	По Коши 	Члены вариационного ряда. Медианы	
Интервальная	По Колмогорову	Среднее арифметическое	
Отношений	По Колмогорову	Степенные средние с F(X)=XC, С0, и среднее геометрическое	

	8. Нечисловая статистика как часть теории устойчивости
	В многообразии моделей и методов анализа данных нами выделена и развита как самостоятельная область нечисловая статистика [14] (синонимы: статистика объектов нечисловой природы [6, 27], статистика нечисловых данных [7]). Примерами объектов нечисловой природы являются значения качественных признаков, т.е. результаты кодировки объектов с помощью заданного перечня категорий (градаций); упорядочения (ранжировки) экспертами образцов продукции (при оценке её технического уровня и конкурентоспособности)) или заявок на проведение научных работ (при проведении конкурсов на выделение грантов); классификации (отношения эквивалентности), т.е. разбиения объектов на группы сходных между собой (кластеры); толерантности, т.е. бинарные отношения, описывающие сходство объектов между собой, например, сходство организационных структур промышленных предприятий; результаты парных сравнений или контроля качества продукции по альтернативному признаку («годен» - «брак»), т.е. последовательности из 0 и 1; множества (обычные или нечеткие), например, перечни рекомендуемых к осуществлению инновационных проектов, составленные экспертами независимо друг от друга; слова, предложения, тексты; вектора, координаты которых - совокупность значений разнотипных признаков, например, результат составления отчета о деятельности промышленного предприятия или анкета эксперта, в которой ответы на часть вопросов носят качественный характер, а на часть - количественный; ответы на вопросы экспертной, маркетинговой или социологической анкеты, часть из которых носит количественный характер (возможно, интервальный), часть сводится к выбору одной из нескольких подсказок, а часть представляет собой тексты; графы [31] и т.д. Интервальные данные тоже можно рассматривать как пример объектов нечисловой природы, а именно, как частный случай нечетких множеств. Отметим, что теория нечетких множеств тесно связана с теорией случайных множеств, а именно, нечеткие множества естественно рассматривать как «проекции» случайных множеств, за каждой системой нечетких множеств видеть систему случайных множеств [6, 7, 14, 15, 16, 19].
	В чем принципиальная новизна нечисловой статистики? Для классической статистики характерна операция сложения. При расчете выборочных характеристик распределения (выборочное среднее арифметическое, выборочная дисперсия и др.), в регрессионном анализе и других областях этой научной дисциплины постоянно используются суммы. Математический аппарат - законы больших чисел, Центральная предельная теорема и другие теоремы - нацелены на изучение сумм. В нечисловой же статистике нельзя использовать операцию сложения, поскольку элементы выборки лежат в пространствах, где нет операции сложения. Методы обработки нечисловых данных основаны на принципиально ином математическом аппарате - на применении различных расстояний в пространствах объектов нечисловой природы.
	Как показали многочисленные опыты, человек более правильно (и с меньшими затруднениями) отвечает на вопросы качественного, например, - сравнительного, характера, чем количественного. Так, ему легче сказать, какая из двух гирь тяжелее, чем указать их примерный вес в граммах [32]. Поэтому нечисловая статистика отражает потребности экспертных оценок [33 - 35] и технологий управления (менеджмента), в частности, контроллинга [36, 37].

	9. Устойчивость по отношению к временным характеристикам (моменту начала реализации проекта, горизонту планирования)
	Перейдем к применению математических методов исследования для модернизации управления предприятиями и организациями. Для решения задач управления используют экономико-математические методы и модели. В качестве первого примера рассмотрим математические задачи, решенные для обоснования стратегического планирования.
	При разработке стратегии развития промышленного предприятия одна из основных проблем – целеполагание. Поскольку естественных целей обычно несколько, то при построении формализованных экономико-математических моделей приходим к задачам многокритериальной оптимизации. Поскольку одновременно по нескольким критериям оптимизировать невозможно (например, невозможно добиться максимальной прибыли при минимуме затрат), то для адекватного применения экономико-математических методов и моделей необходимо тем или иным образом перейти к однокритериальной постановке (либо, выделив множество оптимальных по Парето альтернатив, применить экспертные технологии выбора). При выборе вида единого критерия целесообразно использовать следующую полученную нами характеризацию моделей с дисконтированием.
	Пусть динамику развития рассматриваемой экономической системы можно описать последовательностью , где переменные xj, j = 1, 2, ..., m, лежат в некотором пространстве Х, возможно, достаточно сложной природы. Положение экономической системы в следующий момент не может быть произвольным, оно связано с положением в предыдущий момент. Проще всего принять, что существует некоторое множество К такое, что . Результат экономической деятельности за j-й период описывается величиной . Зависимость не только от начального и конечного положения, но и от номера периода объясняется тем, что через номер периода осуществляется связь с общей (внешней) экономической ситуацией. Желая максимизировать суммарные результаты экономической деятельности, приходим к постановке стандартной задачи динамического программирования: 
	.	(1)
При обычных математических предположениях максимум достигается.
	Часто применяются модели, приводящие к частному случаю задачи (1):
	.	(2)
Это - модели с дисконтированием (- дисконт-фактор). Естественно выяснить, какими «внутренними» свойствами выделяются задачи типа (2) из всех задач типа (1).
	Представляет интерес изучение и сравнение между собой планов возможного экономического поведения на k шагов  и . Естественно сравнение проводить с помощью описывающих результаты экономической деятельности функций, участвующих в задачах (1) и (2): план Х1 лучше плана Х2 при реализации с момента i, если
          (3)  	
Будем писать Х1R(i)Х2, если выполнено неравенство (3), где R(i) - бинарное отношение на множестве планов, задающее упорядочение планов отношением «лучше при реализации с момента i». 
	Ясно, что упорядоченность планов на k шагов, определяемая с помощью бинарного отношения R(i), может зависеть от i, т.е. «хорошесть» плана зависит от того, с какого момента i он начинает осуществляться. С точки зрения реальной экономики это вполне понятно. Например, планы действий, вполне рациональные для периода стабильного развития, нецелесообразно применять в период гиперинфляции. И наоборот, приемлемые в период гиперинфляции операции, не принесут эффекта в стабильной обстановке.  
	Однако, как легко видеть, в моделях с дисконтированием (2) все упорядочения R(i) совпадают, i = 1,2, …, m-k. Оказывается, верно и обратное: если упорядочения совпадают, то мы имеем дело с задачей (2) - с задачей с дисконтированием, причем достаточно совпадения только при k = 1,2. Сформулируем более подробно предположения об устойчивости упорядочения планов. 
	(I). Пусть . Верно одно из двух: либо  для всех , либо  для всех .
	(II). Пусть . Верно одно из двух: либо  для всех , либо  для всех .
	Нами установлено [6], что из условий устойчивости упорядоченности планов (I) и (II) следует существование констант  и , таких, что . Поскольку прибавление константы не меняет точки, в которой функция достигает максимума, то последнее соотношение означает, что условия устойчивости упорядоченности планов (I) и (II) характеризуют (другими словами, однозначно выделяют) модели с дисконтированием среди всех моделей динамического программирования. Другими словами, устойчивость хозяйственных решений во времени эквивалентна использованию моделей с дисконтированием; применяя модели с дисконтированием, предполагаем, что экономическая среда стабильна; если прогнозируем существенное изменение взаимоотношений хозяйствующих субъектов, то вынуждены отказаться от использования моделей типа (2).
	Перейдем к проблеме горизонта планирования. Только задав интервал времени, можно на основе экономико-математических методов и моделей принять оптимальные решения и рассчитать ожидаемую прибыль. Проблема «горизонта планирования» состоит в том, что оптимальное поведение зависит от того, на какое время вперед планируют, а выбор этого горизонта зачастую не имеет рационального обоснования. Однако от него зависят принимаемые решения и соответствующие этим решениям экономические результаты. Например, при коротком периоде планирования целесообразны лишь инвестиции (капиталовложения) в оборотные фонды предприятия, и лишь при достаточно длительном периоде – в основные фонды. Однозначный выбор горизонта планирования обычно не может быть обоснован, это – нечисловая экономическая величина. Предлагаем справиться с противоречием путем использования асимптотически оптимальных планов.
	Рассмотрим модель (2) с , т.е. модель без дисконтирования

При каждом m существует оптимальный план , при котором достигает максимума оптимизируемая функция. Поскольку выбор горизонта планирования, как правило, нельзя рационально обосновать, хотелось бы построить план действий, близкий к оптимальному плану при различных горизонтах планирования. Это значит, что целью является построение бесконечной последовательности  такой, что ее начальный отрезок длины m, т.е. , дает примерно такое же значение оптимизируемого функционала, как и значение для оптимального плана . Бесконечную последовательность  с указанным свойством назовем асимптотически оптимальным планом.
	Выясним, можно ли использовать для построения асимптотически оптимального плана непосредственно оптимальный план. Зафиксируем k и рассмотрим последовательность , m = 1, 2, ... . Примеры показывают, что, во-первых, элементы в этой последовательности будут меняться; во-вторых, они могут не иметь пределов. Следовательно, оптимальные планы могут вести себя крайне нерегулярно, а потому в таких случаях их нельзя использовать для построения асимптотически оптимальных планов.
	Нами установлено [6, 11] существование асимптотически оптимальных планов: можно указать такие бесконечные последовательности , что

С помощью такого подхода решается проблема горизонта планирования - надо использовать асимптотически оптимальные планы, не зависящие от горизонта планирования. Оптимальная траектория движения состоит из трех участков - начального, конечного и основного, а основной участок - это движение по магистрали (аналогия с типовым движением автотранспорта).

	10. Устойчивость в моделях конкретных процессов управления промышленными предприятиями.
	В качестве примера рассмотрим устойчивость к изменению коэффициентов модели и объемов партий в моделях управления запасами. Так, для классической модели Вильсона управления материальными ресурсами в результате строгой постановки задачи оптимизации в ее естественной общности выявлен ряд неклассических эффектов. 
	Пусть  - интенсивность спроса, s – плата за хранение единицы товара в течение единицы времени, g – плата за доставку одной партии, T – интервал (горизонт) планирования. По известной «формуле квадратного корня»  

Найдем неотрицательное целое число n такое, что

Наименьшее из f(Q1) и f(Q2) – минимальные средние издержки, а то из Q1 и Q2, на котором достигается минимум – оптимальный размер партии, 
.
Таким образом, «формула квадратного корня», как правило, не дает оптимальный план, а только асимптотически оптимальный. 
	По статистическим данным можно оценить возможные отклонения  интенсивности спроса , а затем найти рациональную точность  определения платы за хранение s и рациональную точность  определения платы за доставку g согласно принципу уравнивания погрешностей:

Стремиться к более точному определению параметров s и g нецелесообразно, как следствие, нет необходимости выбирать между конкурирующими методиками их расчета.
	Изучение устойчивости позволило получить практически полезные выводы. Так, для кальцинированной соды на Реутовской химбазе Московской области вызванное отклонениями параметров модели максимальное относительное увеличение суммарных затрат не превосходило 26% (колебания по кварталам от 22,5% до 25,95%). Фактические издержки составляли от 260% до 349% от оптимального уровня. внедрение модели Вильсона в практику управления запасами на Реутовской химбазе дает возможность снизить издержки по доставке и хранению кальцинированной соды в 2,1 раза.
	Разработана [11] двухуровневая модель управления материальными ресурсами промышленного предприятия для случая нестационарного спроса, найдены оптимальные значения управляющих параметров, установлена их устойчивость относительно изменения горизонта (интервала) планирования. В этой модели размеры заявок Xj независимы и одинаково распределены, τ(Т) – число заявок за время Т. Оптимальные уровни (при ) таковы:
, ,
где h – издержки от дефицита единицы товара в течение единицы времени.

	11. Устойчивость характеристик инвестиционных проектов к изменению коэффициентов дисконтирования с течением времени 
	Эта задача – частный случай постановок задач устойчивости в рамках статистики интервальных данных ([7, разд.12.7], [38]). Другой частный случай – применение линейного регрессионного анализа интервальных данных при анализе и прогнозировании затрат предприятия ([14, разд.4.4], [39]).

12. Заключительные замечания
	Нами разработана общая схема устойчивости, позволяющая проводить разработку и развитие математических методов и моделей на основе единого методологического подхода к изучению устойчивости выводов по отношению к допустимым отклонениям исходных данных и предпосылок модели. Возможности общего подхода продемонстрированы на примере восьми конкретных постановок задач устойчивости. Рассмотрена устойчивость по отношению к изменению данных (как частный случай - устойчивость характеристик инвестиционных проектов к изменению коэффициентов дисконтирования с течением времени), к изменению объема данных (объема выборки), к изменению распределений данных. Поскольку борьба с неопределенностью может проводиться путем изменения вида данных, т.е. путем перехода к нечисловым данным, то рассмотрены основные идеи нечисловой статистики, в том числе теории измерений. Обсуждается устойчивость по отношению к временным характеристикам (моменту начала реализации проекта, горизонту планирования) и устойчивость в моделях конкретных процессов управления промышленными предприятиями (на примере устойчивости к изменению коэффициентов модели и объемов партий в моделях управления запасами).
	Для обоснованного практического применения математических и моделей процессов управления должна быть изучена устойчивость получаемых с их помощью выводов по отношению к допустимым отклонениям исходных данных и предпосылок моделей. Это требование вытекает из нужд практики и находится вне математики, оно относится к методологии [1] и философии математики [40] В настоящей статье описаны подходы к решению этой проблемы и приведены примеры, демонстрирующие теоретическую значимость и практическую пользу получаемых при изучении устойчивости научных результатов. Очевидна связь многих результатов настоящей статьи с новой областью теоретической и вычислительной математики – системной нечеткой интервальной математикой [41, 42].

Литература
1.	Новиков А.М., Новиков Д.А. Методология. – М.: СИНТЕГ, 2007. – 668 с.
2.	Новиков Д.А. Современные проблемы теории управления организационными системами // Человеческий фактор в управлении / Под ред. Н.А. Абрамовой, К.С. Гинсберга, Д.А. Новикова. – М.: КомКнига, 2006. – С.391 – 407.
3.	Проектирование интегрированных производственно-корпоративных структур: эффективность, организация, управление / С.Н. Анисимов, А.А. Колобов, И.Н. Омельченко, А.И. Орлов, А.М. Иванилова, С.В. Краснов; Под ред. А.А. Колобова, А.И. Орлова. Научное издание. – М.: МГТУ им. Н.Э. Баумана, 2006. – 728 с.
4.	Колобов А.А., Омельченко И.Н., Орлов А.И. Менеджмент высоких технологий. Интегрированные производственно-корпоративные структуры: организация, экономика, управление, проектирование, эффективность, устойчивость. – М.: Экзамен, 2008. – 621 с.
5.	Арнольд В.И. «Жесткие» и «мягкие» математические модели. – М.: МЦНМО, 2008. – 32 с.
6.	Орлов А.И. Устойчивость в социально-экономических моделях. - М.: Наука, 1979. - 296 с. 
7.	Орлов А.И. Прикладная статистика. - М.: Экзамен, 2006. - 671 с. 
8.	Орлов А.И. Основные идеи статистики интервальных данных // Политематический сетевой электронный научный журнал Кубанского государственного аграрного университета (Научный журнал КубГАУ) [Электронный ресурс]. – Краснодар: КубГАУ, 2013. – №10(094). С. 867 – 892. – IDA [article ID]: 0941310060. – Режим доступа: http://ej.kubagro.ru/2013/10/pdf/60.pdf .
9.	Молодцов Д.А. Устойчивость принципов оптимальности. – М.: Наука, 1987. -  280 с.
10.	Молодцов Д.А. Теория мягких множеств. - М.: Едиториал УРСС, 2004. - 360 с. 
11.	Орлов А.И. Теория принятия решений. – М.: Экзамен, 2006. – 573 с.
12.	Орлов А.И. Оценивание для сгруппированных данных // Статистические методы оценивания и проверки гипотез: межвуз. сб. науч. тр. / Перм. гос. нац. иссл. ун-т. – Пермь, 2012. – Вып. 24. – С. 83-95
13.	Орлов А.И.  Статистическое оценивание для сгруппированных данных // Политематический сетевой электронный научный журнал Кубанского государственного аграрного университета (Научный журнал КубГАУ) [Электронный ресурс]. – Краснодар: КубГАУ, 2014. – №04(098). С. 1097 – 1117. – IDA [article ID]: 0981404080. – Режим доступа: http://ej.kubagro.ru/2014/04/pdf/80.pdf.
14.	Орлов А.И. Организационно-экономическое моделирование: Часть 1: Нечисловая статистика. – М.: Изд-во МГТУ им. Н.Э. Баумана, 2009. – 541 с.
15.	Орлов А.И. Задачи оптимизации и нечеткие переменные. - М.: Знание, 1980. – 64 с.
16.	Орлов А.И. Теория нечетких множеств – часть теории вероятностей // Политематический сетевой электронный научный журнал Кубанского государственного аграрного университета (Научный журнал КубГАУ) [Электронный ресурс]. – Краснодар: КубГАУ, 2013. – №08(092). С. 589 – 617. – IDA [article ID]: 0921308039. – Режим доступа: http://ej.kubagro.ru/2013/08/pdf/39.pdf. 
17.	Гнеденко Б.В., Колмогоров А.Н. Предельные распределения для сумм независимых случайных величин. – М.-Л.: ГИТТЛ, 1949. – 264 с.
18.	Новицкий П.В., Зограф И.А. Оценка погрешностей результатов измерений. - Л.: Энергоатомиздат, 1985. - 248 с.
19.	Орлов А.И. Эконометрика. Изд.3-е, перераб. и дополн. - М.: Экзамен, 2004. – 576 с.
20.	Муравьева В.С., Орлов А.И. Организационно-экономические проблемы прогнозирования на промышленном предприятии // Управление большими системами. Вып. 17. - М.: ИПУ РАН, 2007. - С.143 - 158.
21.	Смоляк С.А., Титаренко Б.П. Устойчивые методы оценивания: Статистическая обработка неоднородных совокупностей. - М.: Финансы и статистика, 1980. – 208 с.
22.	Устойчивые статистические методы оценки данных. - М.: Машиностроение. 1984. – 230 с.
23.	Хьюбер П. Робастность в статистике. - М.: Мир. 1984. – 304 с.
24.	Хампель Ф., Рончетти Э., Рауссеу П., Штаэль В. Робастность в статистике. Подход на основе функций влияния. – М.: Мир, 1989. 512 с.
25.	Поляк Б.Т., Щербаков П.С. Робастная устойчивость и управление. – М.: Наука, 2002. – 303 с.
26.	Орлов А.И. Математические методы исследования и теория измерений // Заводская лаборатория. Диагностика материалов. 2006. Т.72. № 1. С.67-70.
27.	Орлов А.И. Тридцать лет статистики объектов нечисловой природы (обзор) // Заводская лаборатория. Диагностика материалов. 2009. Т.75. No.5. С.55-64.
28.	Орлов А.И. О развитии статистики объектов нечисловой природы // Политематический сетевой электронный научный журнал Кубанского государственного аграрного университета (Научный журнал КубГАУ) [Электронный ресурс]. – Краснодар: КубГАУ, 2013. – №09(093). С. 273 – 309. – IDA [article ID]: 0931309019. – Режим доступа: http://ej.kubagro.ru/2013/09/pdf/19.pdf. 
29.	Носовский Г.В., Фоменко А.Т. Царь славян. – М.: АСТ-АСТРЕЛЬ, 2007. – 716 с. 
30.	Орлов А.И. Связь между средними величинами и допустимыми преобразованиями шкалы // Математические заметки. 1981. Т. 30. №4. С. 561-568.
31.	Орлов А. И. Графы при моделировании процессов управления промышленными предприятиями / Управление большими системами. Специальный выпуск 30.1 «Сетевые модели в управлении». М.: ИПУ РАН, 2010. С.62-75.
32.	Анализ нечисловой информации / Ю.Н. Тюрин и др. - М.: Научный Совет АН СССР по комплексной проблеме «Кибернетика», 1981. – 80 с.
33.	Орлов А.И. Организационно-экономическое моделирование: учеб. Ч.2. Экспертные оценки. М.: Изд-во МГТУ им. Н.Э. Баумана, 2011. 486 с.
34.	Орлов А.И. Теория экспертных оценок в нашей стране // Политематический сетевой электронный научный журнал Кубанского государственного аграрного университета (Научный журнал КубГАУ) [Электронный ресурс]. – Краснодар: КубГАУ, 2013. – №09(093). С. 1652 – 1683. – IDA [article ID]: 0931309114. – Режим доступа: http://ej.kubagro.ru/2013/09/pdf/114.pdf
35.	Горский В.Г., Гриценко А.А., Орлов А.И. Метод согласования кластеризованных ранжировок // Автоматика и телемеханика. 2000. №3. С.179 - 187.
36.	Орлов А.И. Эконометрическая поддержка контроллинга // Контроллинг. 2002. №1. С.42 - 53.
37.	Орлов А.И. Контроллинг организационно-экономических методов // Контроллинг. 2008. №4. С.12 - 18.
38.	Алешин Д.Н. Экономическое обоснование эффективности инвестиционных проектов на предприятиях на основе применения эконометрического метода интервальной оценки: Автореф. дисс. … канд. эконом. наук. – М.:МГТУ им. Н.Э.Баумана, 2001. – 16 с.
39.	Гуськова Е.А. Разработка организационно-экономических методов повышения эффективности деятельности промышленного предприятия на основе эконометрического подхода: Автореф. дисс. … канд. эконом. наук. – М.: МГТУ им. Н.Э. Баумана, 2004. – 16 с.
40.	Орлов А.И. Философские основания устойчивого математического моделирования процессов управления промышленными предприятиями // Философия математики: актуальные проблемы: Тезисы Второй международной научной конференции; 28-30 мая 2009 г. – М.: МАКС Пресс, 2009. – С.284-287. 
41.	Луценко Е.В., Орлов А.И. Системная нечеткая интервальная математика (СНИМ) – перспективное направление теоретической и вычислительной математики // Политематический сетевой электронный научный журнал Кубанского государственного аграрного университета (Научный журнал КубГАУ) [Электронный ресурс]. – Краснодар: КубГАУ, 2013. – №07(091). С. 255 – 308. – IDA [article ID]: 0911307015. – Режим доступа: http://ej.kubagro.ru/2013/07/pdf/15.pdf 
42.	Орлов А.И., Луценко Е.В. Системная нечеткая интервальная математика. Монография (научное издание). – Краснодар, КубГАУ. 2014. – 600 с.

References
1.	Novikov A.M., Novikov D.A. Metodologija. – M.: SINTEG, 2007. – 668 s.
2.	Novikov D.A. Sovremennye problemy teorii upravlenija organizacionnymi sistemami // Chelovecheskij faktor v upravlenii / Pod red. N.A. Abramovoj, K.S. Ginsberga, D.A. Novikova. – M.: KomKniga, 2006. – S.391 – 407.
3.	Proektirovanie integrirovannyh proizvodstvenno-korporativnyh struktur: jeffektivnost', organizacija, upravlenie / S.N. Anisimov, A.A. Kolobov, I.N. Omel'chenko, A.I. Orlov, A.M. Ivanilova, S.V. Krasnov; Pod red. A.A. Kolobova, A.I. Orlova. Nauchnoe izdanie. – M.: MGTU im. N.Je. Baumana, 2006. – 728 s.
4.	Kolobov A.A., Omel'chenko I.N., Orlov A.I. Menedzhment vysokih tehnologij. Integrirovannye proizvodstvenno-korporativnye struktury: organizacija, jekonomika, upravlenie, proektirovanie, jeffektivnost', ustojchivost'. – M.: Jekzamen, 2008. – 621 s.
5.	Arnol'd V.I. «Zhestkie» i «mjagkie» matematicheskie modeli. – M.: MCNMO, 2008. – 32 s.
6.	Orlov A.I. Ustojchivost' v social'no-jekonomicheskih modeljah. - M.: Nauka, 1979. - 296 s. 
7.	Orlov A.I. Prikladnaja statistika. - M.: Jekzamen, 2006. - 671 s. 
8.	Orlov A.I. Osnovnye idei statistiki interval'nyh dannyh // Politematicheskij setevoj jelektronnyj nauchnyj zhurnal Kubanskogo gosudarstvennogo agrarnogo universiteta (Nauchnyj zhurnal KubGAU) [Jelektronnyj resurs]. – Krasnodar: KubGAU, 2013. – №10(094). S. 867 – 892. – IDA [article ID]: 0941310060. – Rezhim dostupa: http://ej.kubagro.ru/2013/10/pdf/60.pdf .
9.	Molodcov D.A. Ustojchivost' principov optimal'nosti. – M.: Nauka, 1987. -  280 s.
10.	Molodcov D.A. Teorija mjagkih mnozhestv. - M.: Editorial URSS, 2004. - 360 s. 
11.	Orlov A.I. Teorija prinjatija reshenij. – M.: Jekzamen, 2006. – 573 s.
12.	Orlov A.I. Ocenivanie dlja sgruppirovannyh dannyh // Statisticheskie metody ocenivanija i proverki gipotez: mezhvuz. sb. nauch. tr. / Perm. gos. nac. issl. un-t. – Perm', 2012. – Vyp. 24. – S. 83-95
13.	Orlov A.I.  Statisticheskoe ocenivanie dlja sgruppirovannyh dannyh // Politematicheskij setevoj jelektronnyj nauchnyj zhurnal Kubanskogo gosudarstvennogo agrarnogo universiteta (Nauchnyj zhurnal KubGAU) [Jelektronnyj resurs]. – Krasnodar: KubGAU, 2014. – №04(098). С. 1097 – 1117. – IDA [article ID]: 0981404080. – Rezhim dostupa: http://ej.kubagro.ru/2014/04/pdf/80.pdf.
14.	Orlov A.I. Organizacionno-jekonomicheskoe modelirovanie: Chast' 1: Nechislovaja statistika. – M.: Izd-vo MGTU im. N.Je. Baumana, 2009. – 541 s.
15.	Orlov A.I. Zadachi optimizacii i nechetkie peremennye. - M.: Znanie, 1980. – 64 s.
16.	Orlov A.I. Teorija nechetkih mnozhestv – chast' teorii verojatnostej // Politematicheskij setevoj jelektronnyj nauchnyj zhurnal Kubanskogo gosudarstvennogo agrarnogo universiteta (Nauchnyj zhurnal KubGAU) [Jelektronnyj resurs]. – Krasnodar: KubGAU, 2013. – №08(092). S. 589 – 617. – IDA [article ID]: 0921308039. – Rezhim dostupa: http://ej.kubagro.ru/2013/08/pdf/39.pdf. 
17.	Gnedenko B.V., Kolmogorov A.N. Predel'nye raspredelenija dlja summ nezavisimyh sluchajnyh velichin. – M.-L.: GITTL, 1949. – 264 s.
18.	Novickij P.V., Zograf I.A. Ocenka pogreshnostej rezul'tatov izmerenij. - L.: Jenergoatomizdat, 1985. - 248 s.
19.	Orlov A.I. Jekonometrika. Izd.3-e, pererab. i dopoln. - M.: Jekzamen, 2004. – 576 s.
20.	Murav'eva V.S., Orlov A.I. Organizacionno-jekonomicheskie problemy prognozirovanija na promyshlennom predprijatii // Upravlenie bol'shimi sistemami. Vyp. 17. - M.: IPU RAN, 2007. - S.143 - 158.
21.	Smoljak S.A., Titarenko B.P. Ustojchivye metody ocenivanija: Statisticheskaja obrabotka neodnorodnyh sovokupnostej. - M.: Finansy i statistika, 1980. – 208 s.
22.	Ustojchivye statisticheskie metody ocenki dannyh. - M.: Mashinostroenie. 1984. – 230 s.
23.	H'juber P. Robastnost' v statistike. - M.: Mir. 1984. – 304 s.
24.	Hampel' F., Ronchetti Je., Rausseu P., Shtajel' V. Robastnost' v statistike. Podhod na osnove funkcij vlijanija. – M.: Mir, 1989. 512 s.
25.	Poljak B.T., Shherbakov P.S. Robastnaja ustojchivost' i upravlenie. – M.: Nauka, 2002. – 303 s.
26.	Orlov A.I. Matematicheskie metody issledovanija i teorija izmerenij // Zavodskaja laboratorija. Diagnostika materialov. 2006. T.72. № 1. S.67-70.
27.	Orlov A.I. Tridcat' let statistiki ob#ektov nechislovoj prirody (obzor) // Zavodskaja laboratorija. Diagnostika materialov. 2009. T.75. No.5. S.55-64.
28.	Orlov A.I. O razvitii statistiki ob#ektov nechislovoj prirody // Politematicheskij setevoj jelektronnyj nauchnyj zhurnal Kubanskogo gosudarstvennogo agrarnogo universiteta (Nauchnyj zhurnal KubGAU) [Jelektronnyj resurs]. – Krasnodar: KubGAU, 2013. – №09(093). S. 273 – 309. – IDA [article ID]: 0931309019. – Rezhim dostupa: http://ej.kubagro.ru/2013/09/pdf/19.pdf. 
29.	Nosovskij G.V., Fomenko A.T. Car' slavjan. – M.: AST-ASTREL'', 2007. – 716 s. 
30.	Orlov A.I. Svjaz' mezhdu srednimi velichinami i dopustimymi preobrazovanijami shkaly // Matematicheskie zametki. 1981. T. 30. №4. S. 561-568.
31.	Orlov A. I. Grafy pri modelirovanii processov upravlenija promyshlennymi predprijatijami / Upravlenie bol'shimi sistemami. Special'nyj vypusk 30.1 «Setevye modeli v upravlenii». M.: IPU RAN, 2010. S.62-75.
32.	Analiz nechislovoj informacii / Ju.N. Tjurin i dr. - M.: Nauchnyj Sovet AN SSSR po kompleksnoj probleme «Kibernetika», 1981. – 80 s.
33.	Orlov A.I. Organizacionno-jekonomicheskoe modelirovanie: ucheb. Ch.2. Jekspertnye ocenki. M.: Izd-vo MGTU im. N.Je. Baumana, 2011. 486 s.
34.	Orlov A.I. Teorija jekspertnyh ocenok v nashej strane // Politematicheskij setevoj jelektronnyj nauchnyj zhurnal Kubanskogo gosudarstvennogo agrarnogo universiteta (Nauchnyj zhurnal KubGAU) [Jelektronnyj resurs]. – Krasnodar: KubGAU, 2013. – №09(093). S. 1652 – 1683. – IDA [article ID]: 0931309114. – Rezhim dostupa: http://ej.kubagro.ru/2013/09/pdf/114.pdf
35.	Gorskij V.G., Gricenko A.A., Orlov A.I. Metod soglasovanija klasterizovannyh ranzhirovok // Avtomatika i telemehanika. 2000. №3. S.179 - 187.
36.	Orlov A.I. Jekonometricheskaja podderzhka kontrollinga // Kontrolling. 2002. №1. S.42 - 53.
37.	Orlov A.I. Kontrolling organizacionno-jekonomicheskih metodov // Kontrolling. 2008. №4. S.12 - 18.
38.	Aleshin D.N. Jekonomicheskoe obosnovanie jeffektivnosti investicionnyh proektov na predprijatijah na osnove primenenija jekonometricheskogo metoda interval'noj ocenki: Avtoref. diss. … kand. jekonom. nauk. – M.:MGTU im. N.Je.Baumana, 2001. – 16 s.
39.	Gus'kova E.A. Razrabotka organizacionno-jekonomicheskih metodov povyshenija jeffektivnosti dejatel'nosti promyshlennogo predprijatija na osnove jekonometricheskogo podhoda: Avtoref. diss. … kand. jekonom. nauk. – M.: MGTU im. N.Je. Baumana, 2004. – 16 s.
40.	Orlov A.I. Filosofskie osnovanija ustojchivogo matematicheskogo modelirovanija processov upravlenija promyshlennymi predprijatijami // Filosofija matematiki: aktual'nye problemy: Tezisy Vtoroj mezhdunarodnoj nauchnoj konferencii; 28-30 maja 2009 g. – M.: MAKS Press, 2009. – S.284-287. 
41.	Lucenko E.V., Orlov A.I. Sistemnaja nechetkaja interval'naja matematika (SNIM) – perspektivnoe napravlenie teoreticheskoj i vychislitel'noj matematiki // Politematicheskij setevoj jelektronnyj nauchnyj zhurnal Kubanskogo gosudarstvennogo agrarnogo universiteta (Nauchnyj zhurnal KubGAU) [Jelektronnyj resurs]. – Krasnodar: KubGAU, 2013. – №07(091). S. 255 – 308. – IDA [article ID]: 0911307015. – Rezhim dostupa: http://ej.kubagro.ru/2013/07/pdf/15.pdf 
42.	Orlov A.I., Lucenko E.V. Sistemnaja nechetkaja interval'naja matematika. Monografija (nauchnoe izdanie). – Krasnodar, KubGAU. 2014. – 600 s.